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Publication Title: 

Method and arrangement for the photographically detecting the spatial form of an 
object 



Abstract: 

A method of detecting the 3D shape of an object by photogrammetry, in which a 
plurality of photogrammetric point markers and a plurality of connecting markers 
are provided on the surface of the object, each connecting marker connecting a 
subset of the plurality of point markers with each other, with at least two different 
types of point markers existing that differ from each other in their optical 
configuration, and some of the point markers provided along a connecting marker 
are formed in such a way that the sequence of their optical configurations results 
in a predetermined code that characterizes the respective connecting marker, a 
plurality of photogrammetric images of the object are taken from different views, 
an image processing of the images is performed, in which first the connecting 
markers mutually corresponding to each other in the images are associated with 
one another using their respective code, and then the point markers connected 
with each other by the respective connecting marker ar 
2fb 

e associated with one another with the aid of the connecting marker association 
in the images, and using the point marker association, the 3D shape of the object 
is determined by means of a photogrammetric evaluation process. The invention 
further relates to an arrangement for carrying out the method. 
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(57) Abstract: The invention relates 
to a method for photographically 
detecting the spatial form of an 
objecl, whereby a plurality of 
pho tog ram metric dot marks and a 
plurality of connecting marks which 
respectively join a partial number of 
the plurality of the dot marks arc 
applied to the surface of the object. 
At least two different forms of dot 
marks exist which are differentiated by 
their optical formation. A few of the 
dot marks placed along a connecting 
mark are configured in such a way that 
the sequence of the optical formation 
thereof produces a predetermined 
code which chaiacterises the 
respective connecting marks. Several 
photogrammetric shots of an object 
are taken from different positions, and 
the shots are image processed. The 
connecting marks corresponding to 
the shots are initially associated with 
each other by Iheir respective codes. 
With the help of the association of 
connecting marks in the shot, the dot 
marks which are connected to each 

other by the respective connecting mark are inier-associated. Using the association dot marks the shape of the object is, determined 
by means of a photogrammetric evaluation method. The invention also relates to a device for carrying out said method. 




(57) Zusnmmenfassung: Verfahren zur photogrammetrischen Erfassung der Raumform eines Objekts, bei dem auf der OberflHche 

Odes Objekts mehrere photogrammetrische Punktmarken und mehrere Verbindungsmarken, die jeweils eine Teilmenge der mehreren 
Punktmarken miteinander verbinden, angebracht werden, wobei es mindestens 
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(84) Bestimmungsstaaten (regicnal): europaisches Patent (AT, 
BE, CH, CY, DE, DK, ES, H, FR, GB, GR, IE, IT, LU, MC, 
NTL, PT, SE. TR). 

VerOffeiUlichl: 

— ohne internaiionalen Recherchenberichi und erneui zu 
verdffentlichen nach Erhalt des Berichts 



Zur Erkldrung der Zweibuchstaben-Codes und der anderen 
Abkurzungen wird auf die Erkldrungen ("Guidance Notes on 
Codes and Abbreviations") am Atfangjeder regul^ren Ausgabe 
der PCT-Gazetie verwiesen. 



zwei verschiedene Arten von Punkimarken gibt, die sich durch ihre optische Gestallung voneinander unterscheiden, und einige der 
enllang einer Verbindungsmarke angebrachten Punktmarken so ausgebildet sind, daB die Abfolge ihrer optischen Gestaliungen einen 
vorherbesiimmlen die jeweilige Verbindungsmarke charakierisierenden Code ergibt, mehrere photogrammetrische Aufnahmen des 
Objckts aus vcrschicdcncn Ansichlcn gemachl wcrdcn, cine Bildvcrarbcitung der Aufnahmen durchgcfUhrl wird, bci der zuniiehst 
die sicli in den Aufnahmen jewel Is en t spree hen den Vcrbindungsmaiken anhand ihres jcwciligcn Codes cinandcr zugeordnct wcrdcn 
und dann mithilfe der Verbindungsmai'kenzuordnung in den Aufnahmen die durch die jeweilige Verbindungsmarke niiteinander ver- 
bundenen Punktmarken einandcr zugeordnet werden, und anhand der Puntmarkenzuordnung die Raumform des Objekts mit einem 
phoiogrammetrischen Auswerieverfahren ermine) I wird. Die Erilndung belrift'i ferner eine Anordnung zur Durchfuhrung des Ver- 
fahrens. 
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Verfahren und Anordnung zur photograminetrischen Erfassung 
der Raumform eines Objekts 

Die Erfindung betri'fft ein Verfahren und eine Anordnung 
zur photograminetrischen Erfassung der Raumform eines Objekts. 

Im Zusammenhang mit der sogenannten „Mass-Customization" , 
d.h. der Produktion und dem Verkauf von individuell an die 
Korpermafie eines Kunden angepassten Produkten, ist die 
Erfassung der dreidimensionalen Raumform des KSrpers oder von 
K6rperteilen eine wichtige technisch zu ISsende Aufgabe, Ist 
die dreidimensionale Raumform eines Korperteils, z.B. der 
Rumpf /Bein-Partie, eines Kunden bekannt, so konnen individuelle 
Kleidungsstucke wie eine Hose, ein Hemd usw. mit hoher Passform 
hergestellt werden. 

Es sind eine Reihe von K5rperscannern entwickelt worden, 
welche mit verschiedenen optischen Verfahren, z.B. 
Lasertriangulation, Stereo-Verf ahren, Moire-Verf ahren etc, 
berlihrungslos die dreidimensionale Form des menschlichen 
Korpers oder von Korperteilen erfassen und digitalisieren, 
wobei die die Digitalisierung beschreibenden Datensatze dann 
fur die automatisierte Produktion individuell angepasster 
Produkte bereitstellt werden. Diese Korperscanner arbeiten in 
der Regel mit technisch sehr aufwendigen und teuren Verfahren, 
die zudem eine optische Kalibrierung erfordern und daher nur 
von ausgebildetem Fachpersonal eingesetzt werden konnen. 

Wesentliche kostengiinstiger sind die sogenannten passiven 
verfahren der Nahbereichsphotogrammetrie, da hier lediglich 
kalibrierte Photoapparate oder Digitalkameras, aber keine 
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teuren Projektionseinheiten und genau kalibrierten mechanischen 
Aufbauten benotigt werden. 



So ist z.B. aus dem Patent EP 0 760 622 "Verfahren und 
5 Anordnung zur dreidimensionalen Erfassung der Raumform von 

Korpern und Korperteilen" , dessen Anmelder und Erfinder Robert 
Massen ist, ein Verfahren bekannt, welches es mit einem sehr 
niedrigen technischen Aufwand gestattet, die 3D-Koordinaten 
eines Korpers oder eines Korperteils optisch zu erfassen. 

10 Hierzu wird der Korper mit einem speziell mit ortsgenauen 

Punktmarken markierten elastischen Uberzug bekleidet und aus 
mehreren, sich liber lappenden, aber sonst freihandig 
auf genommenen Kainerapositionen photographiert • Durch eine 
photogrammetrische Auswertung der korrespondierenden 

15 Punktmarken in den einzelnen, sich uberlappenden Bildbereichen 
der Aufnahmen kann ein 3D-Datensatz des Korperteils ermittelt 
werden. 



Urn aus zwei sich uberlappenden Bildauf nahmen mit den 
20 Methoden der Photogrammetrie eine 3D-Rekonstruktion des 

Korperteils aus den auf dem Korperteil oder einem liber den 
Korperteil gezogenen Uberzug angebrachten Punktmarken zu 
ermoglichen, mlissen die Bildpunktkoordinaten der sog, homologen 
Punktmarken, d.h. der sich in den Aufnahmen jeweils 
25 entsprechenden Punktmarken, bestimmt werden. Dieser Vorgang 

wird auch mit Registrierung bezeichnet. Bei einer automatischen 
Registrierung mlissen daher mit Verfahren der zweidimensionalen 
Bildverarbeitung aus zwei sich uberlappenden Bildauf nahmen 
diejenigen Punktmarken gefunden werden, welche sich 
30 entsprechen. Bei bisherigen bekannten Verfahren wird dies durch 
die Verwendung von einzeln codierten Punktmarken erreicht. Es 
werden als Punktmarken z,B, Kreise, welche von radialen 
Segmenten, welche einen binSren Code darstellen, umgeben sind 
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(siehe hierzu den linken Teil der Fig. 1). Der Mittelpunkt der 
codierten Marke definiert dabei den Ort der photogrammetrischen 
Punktmarke, Jede Punktmarke ist durch die radialen Segmente 
eindeutig durch einen eigenen Code gekennzeichnet • 

5 

Bel den zum Stand der Technik gehorenden Verfahren wird 
mithilfe der automatischen Bildverarbeitung versucht, in zwei 
Bildern solche Punktraarken aufzufinden, ihren Code zu lesen und 
eine Liste der korrespondierenden Punktmarken, d.h, der 
10 homologen Punktmarken, zu erstellen. Liegt diese Liste fest, so 
kann luit den bekannten Verfahren der Bildorientierung und des 
Biindelausgleichs ein 3D-Datensat2 erstellt werden, welcher die 
XYZ-Raumkoordinatien aller homologer Punktmarken enthalt. 

Bel der photogrammetrischen Vermessung von grossen 
Strukturen wie Schif f srlimpf en, Flugzeugteilen usw. spielt der 
Platzbedarf solcher codierter Punktmarken keine Rolle, Ein 
Nachteil der zum Stand der Technik gehorenden Verfahren zur 
photogrammetrischen Bestimmung der Raumform eines Objekts, die 
mit einzeln codierten und eine relativ groBe Fiache bedeckenden 
Punktmarken arbeiten, besteht jedoch darin, dafi diese Verfahren 
nicht zur Digitalisierung von sehr kleinen Objekten geeignet 
sind, die wegen der benotigten Raumpunktedichte mit vielen 
Punktmarken bedeckt werden mlissen. Hier ist auf der Oberflache 
der Objekte nicht genugend Platz, urn die fur eine gute 
photogrammetrische Vermessung benotigte Raumpunktdichte durch 
codierte Punktmarken, wie sie z.B. in der Fig. 1 dargestellt 
sind, zu erreichen. 

30 In der deutschen Patentanmeldung mit dem Aktenzeichen 

100 25 922.7 und dem Titel „Automatische photogrammetrische 
Digitalisierung von Korpern und Objekten,,, deren Anmelder und 
Erfinder Robert Massen ist, wird daruber hinaus vorgeschlagen, 



20 
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auf dem in der EP 0 7 60 622 beschriebenen Uberzug Fiachenmarken 
anzubringen, die .jeweils mehrere Punktmarken umfassen und einen 
Hintergrund der Punktmarken bilden, wobei die FlSche der 
Flachenmarken eine bestimmte Farbe auf waist, Durch Verfahren 
5 der Farbbildverarbeitung konnen die in den verschiedenen 

photogrammetrischen Aufnahmen korrespondierenden Flachenmarken 
(Regionen) und daraus dann die korrespondieren Punktmarken 
(sogenannte homologe Bildpunkte) leicht automatisch ermittelt 
werden, Steht die Liste der homologen Bildpunkte bereit, so 
10 konnen mit den dem Fachmann der Photogrammetrie bekannten 

Methoden der Bildorientierung und des Bundelausgleichs die 3D- 
Daten des gesamten Korperteils berechnet werden. 

Nachteilig ist bei diesem Verfahren, dass eine relativ 
15 groJ3e Anzahl verschiedener Farben 2ur Markierung benotigt wird. 
Die Farbtreue der eingesetzten Kameras muss daher ausreichend 
hoch und stafail sein, urn diese Vielzahl unterschiedlicher 
Farben in einer automatischen Erkennung ausreichend 
unterscheiden zu konnen. Auch werden an die Konstanz und 
20 Farbtreue der Beleuchtung hShere Anforderungen gestellt als bei 
einer Markierungstechnik, welche mit nur sehr wenigen, sich im 
Farbraum deutlich unterscheidenden Farben auskommen wurde. Bin 
weiterer Nachteil dieses Verfahrens ist die relativ hche 
geometrische AuflSsung, welche benotigt wird, urn die als Marken 
25 verwendeten Farbkanten und Farbecken optisch aufzulosen. 

Beide Anforderungen, die hohe Farbtreue und die hohe 
geometrische Auflosung, lassen sind nicht mit einfachen und 
sehr preiswerten Kameras erflillen, wie z.B, mit den auf CMOS- 
30 Bildsensoren basierenden Webcams oder den Bildsensoren, welche 
die in den zukiinftigen Mobiltelephonen und sogenannten Personal 
Organizern (Taschencomputern) eingebaut sind. Damit kSnnen 
solche sehr einfachen und preiswerten Bildauf nahmegerate nicht 
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fUr die beschriebene einfache Digitalisierung von Korperteilen 
eingesetzt warden. 

Es besteht daher ein technisches und wirtschaf tliches 
5 Interesse daran, ein Verfahren und eine Anordnung zur 

photogrammetrischen Erfassung der Raumform eines Objekts zu 
schaffen, welches eine verbesserte Markierungsmethode aufweist^ 
die eine preiswerte und einfache Vermessung auch von kleinen 
Objekten erlaubt. 

10 

Darliber hinaus besteht ein Interesse an einem Verfahren 
und einer Anordnung zur photograminetrischen Erfassung der 
Raumform eines Objekts, welche bei der Markierung mit nur 
wenigen unterschiedlichen Farben und nur relativ groben 

15 Strukturen auskoimnen, damit die automatische Bestimmung 
. homologer Bildpunkte aus mehreren, sich uberlappenden 
Bildauf nahmen unter Verwendung von preiswerten, wenig 
farbtreuen und niedrig auflosenden Kameras und Bildgebern sowie 
bei einer Beleuchtung moglich wird, die in bezug auf die Farbe 

20 wenig definiert sein kann. Dadurch wurde sich das Verfahren 
auch unter Verwendung von z.B. heute ublichen preiswerten und 
in Bezug auf die Farbtreue und Auflosung eher schwach 
spezif izierten Webcams (Web-Kameras) oder Digitalkameras 
einsetzen lassen, 

25 

GemaB der Erfindung wird das auf diesem technischen Gebiet 
oben dargestellte Interesse durch ein Verfahren zur 
photogrammetrischen Erfassung der Raumform eines Objekts 
befriedigt, bei dem 
30 auf der Oberfiache des Objekts mehrere photogrammetrische 

Punktmarken und mehrere Verbindungsmarken, die jeweils eine 
Teilmenge der mehreren Punktmarken miteinander verbinden, 
angebracht werden, wobei es mindestens zwei verschiedene Arten 
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von Punktmarken gibt, die sich durch ihre optische Gestaltung 
voneinander unterscheiden, und 

einige der entlang einer Verbindungsmarke angebrachten 
Punktmarken so ausgebildet sind, daB die Abfolge ihrer 
optischen Gestaltiingen einen vorherbestimmten die jeweilige 
Verbindungsmarke charakterisierenden Code ergibt, 
mehrere photogrammetrische Aufnahmen des Objekts aus 
verschiedenen Ansichten gemacht werden, 

eine Bildverarbeitung der Aufnahmen durchgefiihrt wird, bei 
der zunSchst die sich in den Aufnahmen jeweils entsprechenden 
Verbindungsmarken anhand ihres jeweiligen Codes einander 
zugeordnet werden und dann mithilfe der 

Verbindungsmarkenzuordnung in den Aufnahmen die durch die 
jeweilige Verbindungsmarke miteinander verbundenen Punktmarken 
einander zugeordnet werden^ und 

anhand der Punktmarkenzuordnung die Raumform des Objekts 
mit einem photogrammetrischen Auswerteverf ahren ermittelt wird. 

Ferner wird das oben beschriebene Interesse durch eine 
Anordnung zur photogrammetrischen Erfassung der Raumform eines 
Objekts befriedigt, die ein Auf nahmesystem zur Erstellung 
photogrammetrischer Aufnahmen verschiedener Ansichten des 
Objekts und ein System zur Verarbeitung und Auswertung der 
Aufnahmen sowie zur Ermittlung der Raumform des Objekts umfaJit 
und dadurch gekennzeichnet ist^ daJ3 die Anordnung dariiber 
hinaus auf der Oberflache des Objekts mehrere 
photogrammetrische Punktmarken und mehrere Verbindungsmarken 
aufweist, die jeweils eine Teilmenge der mehreren Punktmarken 
miteinander verbinden, wobei es mindestens zwei verschiedene 
Arten von Punktmarken gibt, die sich durch ihre optische 
Gestaltung voneinander unterscheiden, und einige der entlang 
einer Verbindungsmarke angebrachten Punktmarken so ausgebildet 
sind, daJ3 die Abfolge ihrer optischen Gestaltungen einen 
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vorherbestiimnten die jeweilige Verbindungsmarke 
charakterisierenden Code ergibt. 

Dadurch, dafi gemass der Erfindung nicht die Punktmarken 
selbst einzeln codiert sind, sondern eine charakterisitsche 
Abfolge von Punktmarken verschiedener Art einen Code ergibt, 
lassen sich auoh sehr kleine Objekte, die eine hohe 
Punktmarkendichte erfordern, leicht automat isch 
photogrammetrisch erfassen. 

Vorteilhafte Weiterbildungen der Erfindung sind in den 
abhangigen Patentanspriichen gekennzeichnet . 

Weitere Merkmale und Vorteile der Erfindung ergeben sich 
aus der folgenden Beschreibung eines Ausf uhrungsbeispiels 
anhand der Zeichnungen. In den Zeichnungen zeigen: 

Fig. 1 zwei verschiedene zum Stand der Technik gehorende 
codierte Punktmarken; 

Fig. 2 eine Seitenansicht eines mit dem erf indungsgemSfien 
Verfahren zu digitalisierenden Knies mit einem Uberzug und 
einer Kamera in zwei verschiedenen Auf nahmepositionen; 

Fig. 3 das in der Fig. 2 dargestellte Knie in einer 
Draufsicht, wobei die radial um das Knie verteilten 
Aufnahmepositionen einer Kamera dargestellt sind; 

Fig. 4 einen gemafl einer ersten Ausf uhrungsf orm der 
Erfindung photogrammetrisch markierten Knie-Uberzug; 

Fig. 5a den in der Fig. 4 dargestellten Knie-Uberzug in 
einer ersten Auf nahmeposition; 

Fig. 5b den in der Fig. 4 dargestellten Knie-Uberzug in 
einer zweiten Auf nahmeposition; 

Fig. 6 die bei einer weiteren Ausf uhrungsf orm der 
Erfindung verwendete photogrammetrische Markierungsf orm; 
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Fig. 7 die bei einer weiteren Ausf lihrungsform der 
Erfindung verwendete photogrammetrische Markierungsf orm. 

Die Erfindung wird beispielhaf t , was nicht einschrankend 
zu verstehen ist.anhand der photogrammetrischen Erfassung der 
Raumform einer Kniepartie zwecks automatischer Herstellung 
einer Knieorthese beschrieben. 

Beispielhaft sei angenonunen, dass das Knie mit einem 
elastischen Uberzugs bekleidet ist, auf dem photogrammetrische 
Marken angebracht sind. Die photogrammetrischen Marken konnen 
jedoch auch durch eine Vielzahl anderer Verfahren angebracht 
werden. Das Anbringen der Marken auf dem Objekt kann z.B. auch 
durch Auftragen mit Farbe, z.B. Schminke, direkt auf das 
Objekt, durch Projizieren mithilfe eines Pro jektionssystems 
Oder durch Aufkleben von selbstklebenden Folien, auf denen die 
Marken angebracht sind, erfolgen.- 

Das beispielhaft zu digitalisierende und in der Fig, 2 
dargestellte Knie 1 mit den anschliessenden Oberschenkel- und 
Unterschenkelpartien hat ungefShr eine zylindrische Grundform. 
Die erforderlichen, sich uberlappenden photographischen 
Aufnahmen werden in diesem Fall zweckmSfligerweise in Form von 
Rundansichten des zylindrischen Korperteils erstellt, wobei zur 
Sicherstellung einer ausreichenden Uberlappung etwa 8 bis 10 
liber den Umfang verteilte Aufnahmen benotigt werden. 

Fig. 3 zeigt, wie die mit einem markierten elastischen 
Uberzug (2 in der Fig. 2) bekleidete Kniepartie 1 eines 
Patienten, aus acht radialen Ansichten Al bis A8 mit einer 
Kamera aufgenommen wird. Die Fig. 2 zeigt eine Seitenansicht 
des Knies, bei der die Kamera nur in den Positionen A3 und A7 
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dargestellt ist. Hierbei ist es fur die photogrammetrische 
Auswertung lediglich wichtig, dass der angulare 
Uberlappungsbereich der einzelnen Aufnahmen eine ausreichende 
Zahl von homologen , d.h. sich entsprechenden 
photogrammetrischen Punktmarken aufzeigt. Die Kamera kann 
beispielsweise fUr eine solche Rundumauf nahmesequenz in der 
gleichen Hohe per Hand urn das Bein herum gefuhrt werden. 

Fig, 4.zeigt den Kniebereich 1 mit dein elastischen Uberzug 
2, auf dem verschiedene photogrammetrische erf indungsgeraaJie 
Markierungen angebracht sind. 

In seinem unteren Bereich 3 ist der uberzug 2 in einer 
ersten Farbe eingefSrbt, die einen deut lichen Kontrast zu dem 
von den Kameras ebenfalls erfai3ten Raumhintergrund R bildet und 
in der Fig. 4 durch einen hellen Grauton dargestellt ist. Als 
Farbe wird zweckmafiigerweise eine im gewohnlichen Umfeld eher 
seltene Farbe wie z.B. Rosa gewShlt. Auf dem hellen Grauton 
sind Gitterlinien angebracht, wobei die Schnittpunkte der 
vertikalen und horizontalen Gitterlinien 4 bzw. 5 ortsgenaue 
photogrammetrische Punktmarken bilden, die im folgenden auch 
als nicht zur Codierung beitragende Punktmarken bezeichnet 
werden, da sie sich nicht voneinander unterscheiden lassen und 
keinen Code beinhalten und auch nicht zur Codierung dienen 
konnen. 

In seinem oberen Bereich 6 ist der Uberzug 2 in einer 
zweiten Farbe eingefarbt, die einen deutlichen Kontrast zum 
Raumhintergrund R und einen deutlichen Kontrast zur ersten 
Farbe des unteren Bereichs 3 bildet (z.B. Hellgriin). Die zweite 
Farbe ist in der Fig. 4 durch einen dunklen Grauton 
dargestellt. Die vertikalen Linien 4 der Gitterstruktur des 
unteren Bereichs 5 verlaufen auch in den oberen Bereich hinein. 

In dem oberen Bereich 6 werden die Punktmarken dadurch 
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gebildet, daB eine relativ kurze horizontale Linie auf eine 
vertikale Linie 4 zulSuft und an der vertikalen Linie endet, 
wobei der Auf tref f punkt die ortsgenaue Punktmarke definiert. 
Wie in der Fig. 4 zu erkennen ist, gibt es dabei zwei 
5 verschiedene Arten von Punktmarken^ namlich solche, bei denen 
die relativ kurze horizontale Linie von links auf die vertikale 
Linie der Gitterstruktur zulauft und solche, bei denen die 
relativ kurze horizontale Linie von rechts auf die vertikale 
Linie der Gitterstruktur zulauft. 

10 Entlang jeder vertikalen Linie 4 der Gitterstruktur, die 

im folgenden auch als Verbindungsmarke bezeichnet wird, da sie 
verschiedene Punktmarken miteinander verbindet, sind dabei in 
dem oberen Farbbereich 6 vier Punktmarken angeordnet, deren 
Abfolge, d.h. die Abfolge der Anordnung ihrer horizontalen 

15 Linien (z.B, von links, von rechts, von links, von links auf 
die vertikale Linie zulaufend), die jeweilige Verbindungsmarke 
eindeutig kennzeichnet . Die Verbindungsmarken verbinden in dem 
oberen Bereich 6 liegende Punktmarken mit den im unteren 
Bereich 5 liegenden Punktmarken. 

20 Mithilfe einer einfachen bildpunktweise durchgef uhrten 

Farbklassif ikation konnen aus jeder Bildaufnahme bereits 
automatisch die Region „KNIE" anhand der ersten Farbe vom 
Hintergrund segmentiert sowie die Coderegion 6 innerhalb der 
Region „KNIE" anhand der zweiten Farbe lokalisiert werden. Es 

25 ist dem Fachmann der Bildverarverarbeitung bekannt, wie solche 
automatischen Farbsegmentierungen robust durchgefuhrt werden 
konnen (siehe z.B-. Robert Massen: „Form und Farbe: 
Farbbildverarbeitung fiir die industrielle Uberwachung in 
Echtzeit„ in : Maschinelles Sehen, Europa-Fachpresse Verlag 

30 1990, ISBN 3-87207-004-5). 

Die zur photogrammetrischen Auswertung benotigten Marken 
(Punkt- und Verbindungsmarken) werden durch kontraststarke 
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schwarze Linien dargestellt, wobei die Breite dieser Linien sp 
gross gewShlt ist, dass sie auch noch von preiswerten, in der 
Kegel nur schwach auflosenden Kameras abgebildet werden konnen. 
Die Kreuzungspunkte der Linien bzw, im Code-Bereich 6 die 
5 Auf tref f punkte stellen dabei die eigentlichen 

photogrammetrischen Punktmarken dar. Die Lage der Punktmarken 
kann mit Hilfe von Interpolationsverf ahren mit hoher 
Genauigkeit bestimmt werden (Sub-Pixel-Interpolation) , so dass 
trotz einer schlechten geometrischen Kameraauf losung ortsgenaue 

10 Punktmarkenkoordinaten gemessen werden kSnnen. So lasst sich 
mit solchen, dem Fachmann der Bildverarbeitung bekannten Sub- 
Pixel- Interpolationen die XY-Lage des Schwerpunkts einer 
Gitterkreuzung mit einer Genauigkeit bestinunen, welche etwa 5 
bis 10 mal hSher ist als die Grosse des abbildenden 

15 Bildpunktes, 

Die Verbindungs linien zwischen den Kreuzungspunkten dienen 
als „optische Gleise", entlang denen die automatische 
Bildauswertung gezielt von Kreuzungspunkt zu Kreuzungspunkt 
20 fortschreiten kann. Sie stellen damit sowohl in vertikaler als 
auch in horizontaler Richtung die Nachbarschaf tsbeziehungen 
zwischen den zur Codierung beitragenden oder nichtcodierten 
Mar ken her. 

" 25 Urn aus zwei sich uberlappenden Bildauf nahmen mit den 

Methoden der Photogrammetrie eine 3D-Rekonstruktion der auf dem 
Knie-Uberzug angebrachten befestigten Marken zu ermoglichen, 
mlissen die Bildpunktkoordinaten der homologen Punktmarken 
bestimmt werden, was auch als Registrierung bezeichnet wird. 
30 Bei einer automatischen Registrierung miissen mit Verfahren der 
2-dimensionalen Bildverarbeitung aus zwei sich Uberlappenden 
Bildauf nahmen diejenigen Marken gefunden werden, welche sich 
entsprechen. Beim Stand der Technik wird dies durch Verwendung 
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von einzeln codierten und relativ grofif lachigen Punktmarken 
erreicht, wie sie*z,B* in der Fig. 1 dargestellt sind, Es 
werden dann mithilfe der automat ischen Bildverarbeitung gemaJ3 
dem Stand der Technik in zwei Bildern Punktmarken aufgefunden, 
5 es wird ihr Code gelesen und es wird dann eine Liste der 
korrespondierenden Mar ken ^ d.h, der homologen Punktmarken, 
erstellt. Liegt diese Liste fest, so kann mit den bekannten 
Verfahren der Bildorientierung und des Bundelausgleichs ein 3D- 
Datensatz erstellt werden, welcher die XYZ-Raumkoordinaten 
10 aller homologer Punktmarken enthSlt. 

Erf indungsgemSss wird dagegen eine charakteristische 
Abfolge von einf achen und sehr kleinen verschiedenartigen 
Punktmarken dazu verwendet, Verbindungsmarken (z,B. Linien, die 

15 die Punktmarken miteinander verbinden) zu charakterisieren, auf 
denen jeweils eine bestimmte Teilmenge der Punktmarken und 
insbesondere die Punktmarken, die nicht zur Codierung 
beit^ragen, hintereinander angeordnet ist. Die eindeutige 
Zuordnung der nicht zur Codierung beitragenden Punktmarken kann 

20 dabei aus den Nachbarschaf tsbeziehungen zwischen den codierten 
Marken hergestellt werden. 

Erf indungsgemaB wird weiterhin eine platzsparende 
Codierung verwendet, welche so aufgebaut ist, dass die 

25 einzelnen Codestellen der codierten Marke jeweils als eine 

photogrammetrische Punktmarke verwendet werden konnen. Hierbei 
wird z.B. ein vierstelliger Code nicht nur durch eine 
Punktmarke, sondern aus vier Punktmarken gebildet. Beim 
ublichen Verfahren der mit radialen Segmenten codierten 

30 Punktmarken (siehe links in der Fig. l) gibt es pro Code (d.h. 
fiir alle Codeelemente zusammen genommen) nur eine einzige 
Punktmarke. Das erf indungsgemSsse Verfahren multipliziert daher 
die Anzahl der verfUgbaren Punktmarken mit dem Faktor N, wobei 
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N die Anzahl der Codestellen (BIT-Stellen bei einem binaren 
Code) bezeichnet. Damit kann ein Korperteil wesentlich dichter 
digitalisiert werden, da er dichter mit codierten Punktmarken 
uberzogen warden kann. 

5 

Fig. 5a und 5b zeigen zwei aus den verschiedenen 
Auf nahmepositionen A5 und A4 (siehe hierzu die Fig. 3) 
erstellte Aufnahmen des mit dem Uberzug versehenen Knies. Bei 
dein zu digitalisierenden Knie, bei dem es sich urn einen 

10 ungefShr zylinderf ormigen KSrper handelt, und bei dem die 

automatische Zuordnung korrespondierender Bildpunkte aus sich 
liberlappenden Umf angsauf nahmen ermittelt werden soli, werden 
die vertikalen Gitterlinien (die entlang der LSngsachse des 
Beines orientierten Linien ) Li in der mit der ersten Farbe 

15 gekennzeichneten Coderegion 6 durch einen binaren Code mit den 
beiden Codeelementen: 

- horizontale Abzweigung von der Gitterlinie nach links = 
logisch NULL = 0 

- horizontale Abzweigung von der Gitterlinie nach rechts = 
20 logisch BINS = L 

gekennzeichnet • 

Die Aufnahme A5 in der Fig. 

Binarcode welcher jede vertikale 
25 eindeutig codiert: 

Linie L 4 = ( 0 L 0 0 ) 

Linie L 0 = -' (0 0 0 0) 

Linie L 5 = ( 0 L 0 L ) 

Linie L 10 = ( L 0 L 0 ) 

30 Linie" L 6 = ( 0 L L 0 ) 

Das erste Codebit wird z.B. durch die erste 
Gitterverzweigung welche von oben ausgehend angetroffen wird, 



5a zeigt einen vierstelligen 
Linie (Verbindungsmarke 4) 
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dargestellt. Durch den markanten Farbiibergang 2wischen der mit 
der ersten Farbe flSchig eingefarbten Coderegion 6 und der mit 
der zweiten Farbe* flachig eingefarbten ubrigen unteren 
Knieregion 3 kann autoiuatisch der Aufsetzpunkt fur die 
5 Decodierung dieses Codes mit Verfahren der Farb- und 

Grauwertbildverarbeitung gefunden werden, auch wenn die Kamera 
- zwischen den Aufnahmen verdreht oder gekippt wird oder sonst in 
einer unbekannte Auf nahmeposition gerat. 

10 In der Fig. 5b ist die Bildaufnahme A4 des Knies mit 

Uberzug dargestellt, die aus einer radial urn 4 5 Grad gegeniiber 
der Aufnahme A5 versetzten Auf nahmerichtung entstanden ist, 

Durch automatisches Ablesen des Codes der 
15 Verbindungsmarken (d.h. der vertikalen Linien 4) konnen sofort 
die sich in den beiden Aufnahmen A5 und A4 entsprechenden 
Verbindungsmarken, d.h. die homologen vertikalen Linien 4, 
bestimmt werden, 

Bei der photogrammetrischen Auswertung wird nun zunSchst 
20 eine Bildverarbeitung der Aufnahmen durchgef Uhrt wird, bei der 
zunachst die sich in den Aufnahmen jeweils entsprechenden 
Verbindungsmarken 4 anhand ihres jeweiligen Codes einander 
zugeordnet werden und dann mithilfe der 

Verbindungsmarkenzuordnung in den Aufnahmen die durch die 
25 jeweilige Verbindungsmarke miteinander verbundenen Punktmarken 
einander zugeordnet werden, wobei anhand der 
Punktmarkenzuordnung die Raumform des Objekts mit einem 
photogrammetrischen Auswerteverf ahren ermittelt wird. 
Besonders vorteilhaft ist es bei diesem 
30 Ausfuhrungsbeispiel der Erfindung, daJ3 die Codestelle 

„Verzweigung" gleichzeitig als photogrammetrische Punktmarke 
dienen kann, Der Schwerpunkt einer Links- oder 
Rechtsverzweigung lasst sich bei der Bildauswertung ebenso 
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genau ermitteln wie der Schwerpunkt eines durchgehenden 
Gitterkreuzes- Damit ist diese Codierung im Gegensatz zu den 
bekannten Verfahren extrem platzsparend. 

5 Ein besonderer Vorteil der Erfindung besteht darin, dass 

jede Codestelle eine Punktmarke darstellt. Damit verbraucht ein 
solcher Code wenig von deiti flir die Digitalisierung benotigten 
Platz, weil er auf mehrere kompakte Punktmarken verteilt ist. 

10 Selbstverstandlich muss dieser Code nicht auf einen 

binaren Code beschrankt sein. Fig, 6 zeigt beispielsweise die 
Codierung der Verbindungsmarken (vertikalen Linien) mit einem 
ternSren Code, welcher aus den Elementen: 

- horizontale Abzweigung nach links = A 
15 - horizontale Abzweigung nach rechts = B 

- Abzweigung nach links und nach rechts = C 

besteht. 

Mit lediglich 3 verschiedenen Kreuzungsarten ( = 
20 Codestellen ) kSnnen bereits 3*3 = 9 Verbindungsmarken (Linien) 
eindeutig codiert werden, so dass ein solcher Code nochmals 
wesentlich weniger Platz beansprucht als der binSre Code. 

Es kann unter Umstanden vorteilhaft sein, uber mehr Codes 
25 zu verfugen als fur die eindeutige Kennzeichnung samtlicher 
Verbindungsmarken benotigt werden, da zusatzliche Codes zur 
Codesicherung, Fehlererkennung und Fehlerkorrektur verwendet 
werden konnen. Die Verwendung und Auslegung hierbei 
auftretender redundanter Codes fUr eine automatische 
30 Fehlerkorrektur und Fehlererkennung von beim Codelesen 

auftretenden Fehlern ist dem Fachmann der Codierung bekannt. 
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Es ist ersichtlich^ daJ3 das erf indungsgemaBe Prinzip bei 
einer Vielzahl von verschiedenen Punktmarken Verwendung finden 
kann, wobei die Punktmarken nicht notwendigerweise aus Kreuzen 
Oder auf einandertref fenden Linien zu bestehen brauchen* Es 
5 mlissen lediglich mindestens zwei verschiedene Arten von 

Punktmarken bereitgestellt warden, wobei die genaue Form der 
Punktmarken keine Rolle spielt, sie mlissen nur ihrer Funktion 
als Punktmarken folgend, geeignet sein, den Ort eines Punktes 
auf dem Objekt festzulegen. 

10 

So ist in der Fig. 7 eine Ausf uhrungsform der Erfindung 
dargestellt, bei der schwarze Punkte iriit unterschiedlichem 
Durchmesser als Punktmarken eingesetzt werden, wobei ein Punkt 
mit einem kleinen Durchmesser (links in der Fig, 7) eine 

15 logische Null und ein Punkt mit einem groBen Durchmesser (in 
der Mitte der Fig. 7) eine logische Eins des Codes markiert. 

So ergibt sich z.B. rechts in der Fig. 7 der Code „0 L L L 
L", durch Hintereinanderlegen von einem kleinen und drei groBen 
schwarzen Kreisen. 

20 Selbstverstandlich mlissen als Verbindungsmarken nicht 

unbedingt vertikale gerade Linien verwendet werden, die die 
Punktmarken miteinander verbinden. Es konnen z.B. ebenso 
horizontale Linien oder gekrlimmte Linien verwendet werden. 
Wichtig ist nur, daB durch die Verbindungsmarken eine 

25 verbindung zwischen den Punktmarken hergestellt wird, die der 
Verbindungsmarke zuzuordnen sind. Es ist daher auch denkbar, 
daB die Verbindungsmarken selbst aus Punkten bestehen. 

Damit sind erf indungsgemaB drei Aufgaben mit dieser 
30 erfindungsgemSssen Markierung gelost: es wird eine 

grossf ISchige, auch von einer schlecht auflosenden Kamera 
erfassbare Codierung einer Struktur (im beschriebenen Beispiel 
dicke Gitterlnien) moglich, es kann diese Codierung 
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gleichzeitig als eine Vielzahl ortsgenauer photogrammetrischer 
Punktmarken ausgenutzt werden und es kann eine automatische 
Bestimmung homologer Punktmarken mithilfe der. Bestinunung 
homologer Verbindungsmarken erfolgen. 

5 

Bei anderen Ausf uhrungsf ormen der Erfindung konnen 
naturlich die zur Unterscheidung zwischen zur Codierung 
beitragenden Punktmarken und nicht zur Codierung beitragenden 
Punktmarken angebrachten FlSchen durch verschiedenste optische 

10 Gestaltungen voneinander abgehoben werden. Diese optische 

Gestaltung muJ3 nicht unbedingt in einer unterschiedlichen Farbe 
bestehen, sondern kann auch in einem charakteristischen 
Grauwert, einer charakteristischen Textur, d.h, einem 
charakteristischeii Muster oder einer charakterisitschen 

15 Struktur, einem charakteristischen Glanz, einer auf der Flache 
auf gebrachten Oberf lachenbeschichtung mit charakteristischem 
Polarisationsgrad, charakteristischen Fluoreszenzeigenschaf ten, 
bestimmten spektralen Signalturen, einem bestimmten lokalen 
Glanz, einer bestimmten lokalen Temperatur oder einer 

20 charakteristischen Kombination der aufgezahlten optischen 
Gestaltungsmerkmale' bestehen. 



Auch konnen die zur photogrammetrischen Markierung 
aufgebrachten- kontraststarken Strukturen sich durch 

25 Ref lexionseigenschaften in bezug auf einen au/Jerhalb des 

sichtbaren Bereichs liegenden Spektralbereich auszeichnen, Sie 
konnen z,B. aus nur im nahen Inf rarot-Bereich, im Bereich des 
Ultravioletten oder in einem sonstigen, fiir das menschliche 
Auge nicht sichtbaren Bereich der Wellenlangen gegenliber dem 

30 Hintergrund kontrastieren. So lassen sich z.B. elastische 

Uberzuge herstellen, bei denen die Markierung unsichtbar ist, 
bzw. von einer sichtbaren, fiir das menschliche Auge bestimmten 
Farbgebung uberdeckt wird. Diese kSnnen z.B, Schwimmanzuge 
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sein, die zum einen mit einem fur das menschliche Auge 
sichtbaren „asthetischen" Muster gestaltet sein kSnnen, und 
zusatzlich mit einer unsichtbaren photogranMetrisch erfaJ3baren 
Oberf lachenmarkierung aus Punkt- und Verbindungsiuarken, 
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Patentanspriiche 

1 . Verf ahren zur photogranuuetrischen Erf assung der Raumf orm 
5 eines Objekts (1), bei dem 

auf der Oberflache des Objekts (1) mehrere 
photogrammetrische Punktmarken und mehrere Verbindungsmarken 
(4), die jeweils eine Teilmenge der mehreren Punktmarken 
miteinander verbinden, angebracht werden, wobei es mindestens 
10 zwei verschiedene Arten von Punktmarken gibt, die sich durch 
ihre optische Gestaltung voneinander unterscheiden, und 

einige der entlang einer Verbindungsmarke (4) angebrachten 
Punktmarken so ausgebildet sind, daU die Abfolge ihrer 
optischen Gestaltungen einen vorherbestimmten die jeweilige 
15 Verbindungsmarke charakterisierenden Code ergibt, 

mehrere photogrammetrische Aufnahmen des Objekts aus 
verschiedenen Ansichten (Al, A2, A8) gemacht werden, 

eine Bildverarbeitung der Aufnahmen durchgefuhrt wird, bei 
der zunachst die sich in den Aufnahmen jeweils entsprechenden 
20 Verbindungsmarken (4) anhand ihres jeweiligen Codes einander 
zugeordnet werden und dann mithilfe der 

Verbindungsmarkenzuordnung in den Aufnahmen die durch die 
jeweilige Verbindungsmarke miteinander verbundenen Punktmarken 
einander zugeordnet werden, und 
25 anhand der Punktmarkenzuordnung die Raumform des Objekts 

( 1 ) mit einem photogrammetrischen Auswerteverf ahren ermittelt 
wird. 

2. Verf ahren nach Anspruch 1, bei dem die Verbindungsmarken (4) 
30 aus Linien bestehen. 

3. Verf ahren nach Anspruch 2, bei dem die Linien gerade sind. 
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4. Verfahren nach Anspruch 2, bei dem die Linien gekriimmt sind. 

5. Verfahren nach einem der vorhergehenden Anspriiche 2 bis 4, 
bei dem die Punktmarken jeweils durch zwei auf einandertref f ende 

5 Linien definiert werden, von denen eine zu einer 

Verbindungsmarke (4) gehort, die eine Teilmenge der Punktmarken 
miteinander verbindet, 

6. Verfahren nach Anspruch 5, bei dem die unterschiedliche 

10 optische Gestaltung der Punktmarken darin besteht, daJ3 manche 
Punktmarken von der einen Seite der eine Verbindungsmarke 
bildenden Linie auf diese zulaufen und an dieser enden und 
manche anderen Punktmarken von der anderen Seite der eine 
Verbindungsmarke bildenden Linie auf diese zulaufen und an 

15 dieser enden, wobei die Abfolge von von einen und der anderen 
Seite zulaufenden Punktmarken den die Verbindungsmarke 
charakterisierenden Code ergibt. 

7. Verfahren nach Anspruch 5, bei dem die unterschiedliche 

20 optische Gestaltung der Punktmarken darin besteht, daJ3 manche 
Punktmarken einer Seite auf eine eine Verbindungsmarke bildende 
Linie zulaufen und an der Linie enden und manche Punktmarken 
die Verbindungsmarke bildende Linie kreuzen, wobei die Abfolge 
von von einer Seite zulaufenden Punktmarken und kreuzenden 

25 Punktmarken den die Verbindungsmarke charakterisierenden Code 
ergibt . 

8. Verfahren nach einem der Anspriiche 1 bis 4, bei dem die 
Punktmarken durch Kreise gebildet werden. 

30 

9. Verfahren nach Anspruch 8, bei dem die unterschiedliche 
optische Gestaltung der Punktmarken darin besteht, daJ3 die 
punkte unterschiedliche Durchmesser haben. 
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10. Verfahren nacH einem der vorhergehenden Ansprliche^ bei dem 
die Punktmarken, die einen Code bilden mit einer in einer 
ersten Art optisch" gestalteten Flache hinterlegt sind und die 

5 ubrigen Punktmarken, die keinen Code bilden, mit einer in einer 
zweiten sich von der ersten Art unterscheidenden Art 
gestalteten Flache hinterlegt sind. 

11. Verfahren nach Anspruch 10, bei dem die unterschiedliche 
10 optische Gestaltung der Flachen darin besteht, dal3 die Flachen 

unterschiedliche Farben haben. 

12. Verfahren nach einem der vorhergehenden Anspruche, bei dem 
das Anbringen der Punkt- und Verbindungsmarken (4) auf dem 

15 Objekt (1) in der Weise erfolgt, daB ein elastischer Uberzug 
(2), auf dem die Marken aufgebracht sind, iiber das Objekt 
gezogen wird. 

13. Verfahren nach einem der Ansprliche 1 bis 11, bei dem das 
20 Anbringen der Punkt- und Verbindungsmarken (4) auf dem Objekt 

(1) in der Weise erfolgt, da3 die Marken auf das Objekt (1) mit 
Farbe aufgebracht werden. 

14. Verfahren nach einem der Anspriiche 1 bis 11, bei dem das 
25 Anbringen der Punkt- und Verbindungsmarken (4) auf dem Objekt 

(1) in der Weise erfolgt, daJ3 die Marken auf das Objekt (1) 
projiziert werden. 

15. Verfahren nach einem der Anspriiche 1 bis 11/ bei dem das 
30 Anbringen der Punkt- und Verbindungsmarken (4) auf dem Objekt 

(1) in der Weise erfolgt, daJ3 auf die Oberfiache des Objekts 
(1) selbstklebende Folien geklebt werden, auf denen die Marken 
aufgebracht sind. 
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16. Anordnung zur photogrammetrischen Erfassung der Raumform 
eines Objekts mit einem Auf nahmesystem zur Erstellung 
photograiranetrischer Aufnahmen verschiedener Ansichten des 

5 Objekts (1) und einem System zur Verarbeitung und Auswertung 
der Aufnahmen sowie zur Ermittlung der Raumform des Objekts, 
dadurch gekennzeichnet , daJ3 die Anordnung dariiber hinaus auf 
der Oberflache des Objekts itiehrere photogrammetrische 
Punktmarken und mehrere Verbindungsmarken (4) auf waist, die 

10 jeweils eine Teilmenge der mehreren Punktmarken miteinander 
verbinden, wobei es mindestens zwei verschiedene Arten von 
Punktmarken gibt, die sich durch ihre optische Gestaltung 
voneinander unterscheiden, und einige der entlang einer 
Verbindungsmarke (4) angebrachten Punktmarken so ausgebildet 

15 sind, dafi die Abfolge ihrer optischen Gestaltungen einen 
vorherbestimmten die jeweilige Verbindungsmarke 
chai:akterisierenden Code ergibt, 

17, Anordnung nach Anspruch 16, die dariiber hinaus einen 
20 elastischen uberzug (2) aufweist, auf dem die Punkt- und 

verbindungsmarken (4) angebracht sind und der so ausgebildet 
ist, dai3 er iiber das Objekt (1) gezogen werden kann und sich 
dabei an die Form des Objekts (1) anpafit, 

25 18, Anordnung nach Anspruch 16, die dariiber hinaus eine oder 
mehrere selbstklebende Folien aufweist, auf denen die Punkt- 
und Verbindungsmarken (4) angebracht sind und die so 
ausgebildet sind, dai3 sie, wenn sie auf die Oberflache des 
Objekts (1) geklebt sind, eng an dem Objekt (1) anliegen. 



19- Anordnung nach Anspruch 16, die dariiber hinaus ein 
projektionssystem umfafit, das so ausgebildet ist, daJ3 damit die 
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Punkt- und Verbindungsmarken (4) auf das Objekt (1) projiziert 
warden konnen. 

20, Verfahren nach einem der Anspriiche 1 bis 15 oder Anordnung 
nach einem der Anspruche 16 bis 19, bei dem bzw. bei der das 
Objekt der Korperteil eines Menschen ist. 
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